< Prev | Home | Model | Random | Next >

Model: GPT-2 Xl: 48 Layers, 6400 Neurons per Layer

Dataset: Open Web Text

Neuron 2 in Layer 23

Load this data into an Interactive Neuroscope

See Documentation here

Transformer Lens Loading: HookedTransformer.from_pretrained('gpt2-xl')



Text #0

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.5565. Min Act: -0.1700

Data Index: 1024519 (Open Web Text)

Max Activating Token Index: 191

Click toggle to see full text

Truncated

 violence perpetrated by characters who are the height and build of a ten-year-old is haunting, and grounds us firmly in the ancient Celtic fairy tradition that these beings are hardly childs play. 
 
Hatchling, from Lips Touch Three Times, by Laini Taylor 
 

Full Text #0

<|endoftext|> was the worst: a high, thin screaming, muffled because her mouth was now on the inside of her body, but still she screamed. 
 
The Stolen, by Bishop OConnell 
 
This debut novel contains a whole menagerie of Fey beasties that go bump in the night. OConnell is always meticulously faithful to the Irish mythological roots he draws from, down to the proper Gaelic names. The most frightening creatures in this novel are not the hell hounds who hunt down the hero and heroine, but the Oiche, the dark Fey, who are terrifying in part because they resemble children. The cognitive dissonance of seeing murder and sexual violence perpetrated by characters who are the height and build of a ten-year-old is haunting, and grounds us firmly in the ancient Celtic fairy tradition that these beings are hardly childs play. 
 
Hatchling, from Lips Touch Three Times, by Laini Taylor 
 
All three of the novellas in this omnibus collection play upon some aspect of the supernatural, but the final story, Hatchling, is by far the creepiest. Changeling stories always imply a question: why would the fairies want to take a human child? The answer in Hatchling is both relatable and chilling. For the immortal Fey, nothing is more fascinating than someone youngso they keep human children as pets. These are kids who are petted and groomed but never loved, which makes the story more disturbing than if they were tortured. While ostensibly YA, Taylors book might be too much for some young readers, particularly the scene where the fey Queen and King forcibly �breed their now grown human captives to create the next generation of pets. Taylors Fey have the power to take possession of any human who looks at them: �They can use your eyes as windows and climb inside you, shoving their dark animus into your soul and filling it, like brutal fingers thrust into a childs glove. Taylors prose lingers in the mind because of the contrast of luminously beautiful language used to describe the ugliest of things. Its the perfect metaphor for fairies. 
 
Unveiled is available now.<|endoftext|>HONG KONG (Reuters) - China is producing far more carbon dioxide than previous estimates and this will frustrate global aims to stabilize atmospheric greenhouse gases, a group of U.S. economists said. 
 
A man rides his bicycle across a pedestrian bridge as cars travel on the road below in Beijing January 2, 2008. REUTERS/David Gray 
 
China is the worlds second-largest emitter of CO2 and some studies suggest it might already have overtaken the United States last year. The report could add to calls for China to sign up to binding cuts, something it has refused to do. 
 
Writing in the May issue of the Journal of Environmental Economics and Management, researchers at the University of California, Berkeley, and UC San Diego said Chinas CO2 emissions will grow at least 11 percent annually between 2004 and 2010. 
 
Previous estimates, including those used by the U.N.s Intergovernmental Panel on Climate Change, say the region that includes China will see a 2.5 to 5 percent annual increase in CO2 emissions during the same period. 
 
The release of the article comes as energy and environment ministers from the worlds 20 major greenhouse gas emitting nations prepare to meet in Japan from Friday to discuss climate change, clean energy and sustainable development. 
 
The G20, ranging from top polluters the United States and China to Indonesia, Brazil and South Africa, emit about 80 percent of mankinds greenhouse gases. 
 
Pressure is growing on these nations to hammer out a pact to halt and reverse growing emissions of CO2, the main gas blamed for global warming. 
 
In the journal report, the U.S. researchers said that by 2010, there will be an increase of 600 million metric tons of CO2 emissions in China over levels in 2000. 
 
They said that figure from China alone would overshadow the 116 million metric tons of carbon emissions reductions pledged by all the developed countries under the Kyoto Protocol during the pacts 2008-2012 first commitment phase. 
 
China is not obliged under Kyoto to cut greenhouse gas emissions during 2008-12. But it joined nearly 190 nations in Bali in December in agreeing to launch two years of U.N.-led talks to create a global emissions-fighting pact to replace Kyoto from 2013. 
 
The authors used pollution data from 30 provinces and Chinas official waste gas emissions data to get a more detailed picture of CO2 emissions up to 2004. 
 
It had been expected that the efficiency of Chinas power generation would continue to improve as per-capita income increased, slowing down the rate of CO2 emissions growth,

Text #1

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.5252. Min Act: -0.1700

Data Index: 2426524 (Open Web Text)

Max Activating Token Index: 13

Click toggle to see full text

Truncated

Full Text #1


Text #2

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.5252. Min Act: -0.1700

Data Index: 3860133 (Open Web Text)

Max Activating Token Index: 429

Click toggle to see full text

Truncated

Full Text #2


Text #3

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4468. Min Act: -0.1700

Data Index: 2803575 (Open Web Text)

Max Activating Token Index: 718

Click toggle to see full text

Truncated

Full Text #3


Text #4

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4468. Min Act: -0.1700

Data Index: 4117500 (Open Web Text)

Max Activating Token Index: 298

Click toggle to see full text

Truncated

Full Text #4


Text #5

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4468. Min Act: -0.1700

Data Index: 6417725 (Open Web Text)

Max Activating Token Index: 401

Click toggle to see full text

Truncated

Full Text #5


Text #6

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4312. Min Act: -0.1700

Data Index: 3294024 (Open Web Text)

Max Activating Token Index: 190

Click toggle to see full text

Truncated

Full Text #6


Text #7

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4312. Min Act: -0.1700

Data Index: 8413836 (Open Web Text)

Max Activating Token Index: 693

Click toggle to see full text

Truncated

Full Text #7


Text #8

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4312. Min Act: -0.1700

Data Index: 8128685 (Open Web Text)

Max Activating Token Index: 470

Click toggle to see full text

Truncated

Full Text #8


Text #9

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4155. Min Act: -0.1700

Data Index: 4761599 (Open Web Text)

Max Activating Token Index: 190

Click toggle to see full text

Truncated

Full Text #9


Text #10

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.4155. Min Act: -0.1700

Data Index: 1997962 (Open Web Text)

Max Activating Token Index: 202

Click toggle to see full text

Truncated

Full Text #10


Text #11

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3998. Min Act: -0.1700

Data Index: 3698179 (Open Web Text)

Max Activating Token Index: 984

Click toggle to see full text

Truncated

Full Text #11


Text #12

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3998. Min Act: -0.1700

Data Index: 108787 (Open Web Text)

Max Activating Token Index: 125

Click toggle to see full text

Truncated

Full Text #12


Text #13

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3998. Min Act: -0.1700

Data Index: 7701989 (Open Web Text)

Max Activating Token Index: 819

Click toggle to see full text

Truncated

Full Text #13


Text #14

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3998. Min Act: -0.1700

Data Index: 8461746 (Open Web Text)

Max Activating Token Index: 743

Click toggle to see full text

Truncated

Full Text #14


Text #15

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3841. Min Act: -0.1700

Data Index: 6549681 (Open Web Text)

Max Activating Token Index: 982

Click toggle to see full text

Truncated

Full Text #15


Text #16

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3841. Min Act: -0.1700

Data Index: 3735762 (Open Web Text)

Max Activating Token Index: 196

Click toggle to see full text

Truncated

Full Text #16


Text #17

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3998. Min Act: -0.1700

Data Index: 1137832 (Open Web Text)

Max Activating Token Index: 827

Click toggle to see full text

Truncated

Full Text #17


Text #18

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3841. Min Act: -0.1700

Data Index: 1235757 (Open Web Text)

Max Activating Token Index: 972

Click toggle to see full text

Truncated

Full Text #18


Text #19

Max Range: 3.5565. Min Range: -3.5565

Max Act: 3.3685. Min Act: -0.1700

Data Index: 1579229 (Open Web Text)

Max Activating Token Index: 771

Click toggle to see full text

Truncated

Full Text #19